Необходимо спарсить ссылки одной из этих пс. Чувствую, гугл настроил слишком много преград для осущствления моих планов, но гдето читал, что яха более лоялен.
Перепробовал множество старых гугловских - все бестолку. Umax SEP - парсит, но только первые 5 страниц (если я канечно всё правильно делаю).
Чудо-штуками навроде алсаба и хрумера не обладаю, нигде толковой инфы по этой теме не нашел...
Быть может, есть готовые классы или скрипты? Не хочется изобретать велосипед с новой наклейкой, и так их уже изрядно мной наделано.
- 11.09.2009 00:31Member


- Регистрация: 09.09.2009
- Сообщений: 64
- Репутация: 10
- 11.09.2009 00:32
Десктопный софт есть - Agress Parser.
Спасибо сказали:
freeL(11.09.2009), - 11.09.2009 00:39Member


- Регистрация: 09.09.2009
- Сообщений: 64
- Репутация: 10
Пользовал его - у гугла спарсил очень мало, а с яхой вообще глухо.
- 11.09.2009 01:15
Google наверняка можно парсить Allsubmitter'ом, сам парсю регулярно, а яху, по идее тоже возможно...
- 11.09.2009 02:44
Спасибо сказали:
freeL(11.09.2009), - 11.09.2009 02:53Banned

- Регистрация: 08.09.2009
- Сообщений: 53
- Репутация: 10
Agress Parser - самый адекватный бесплатный вариант парсера, главное разобратся с проксями и в бой
Спасибо сказали:
freeL(11.09.2009), - 11.09.2009 03:01Member


- Регистрация: 09.09.2009
- Сообщений: 64
- Репутация: 10
Ясно, я ставил задержку между запросами в 30с, видимо этого мало.
Еще вопрос - как обойти максимум гугла в 1к ссылок? - 11.09.2009 03:07
Операторами запросов Гугла. Сначала выбрали 1к, потом исключаешь определенный признак и выбираешь дальше.
Спасибо сказали:
freeL(11.09.2009), - 11.09.2009 03:58Member


- Регистрация: 09.09.2009
- Сообщений: 64
- Репутация: 10
Что то гугл занемог, отказался парсится вовсе. Яха неплохо пошла.
На счет проблемы с гуглом - грешил на google.txt, попробовал несколько других, найденных в инете, но проверил вручную запрос, подставляя в {REQUEST} нужный запрос, всё было нормально. Кто нибуть сталкивался? - 11.09.2009 04:26
Тэги топика:
Похожие темы
| Темы | Раздел | Ответов | Последний пост |
|---|---|---|---|
Парсер выдачи яндекса | Софт, скрипты, сервисы | 16 | 27.02.2015 20:21 |
Анализ выдачи яндекса | Софт, скрипты, сервисы | 3 | 04.01.2010 04:56 |
Приколы выдачи Гугла | Оффтоп и свободные темы | 1 | 21.10.2009 00:31 |
Покупка трафа в Yahoo и Google под фарму | PPC и контекстная реклама | 23 | 25.09.2009 12:27 |
Удобный сервис для просмотра выдачи Google в других странах | Софт, скрипты, сервисы | 5 | 14.09.2009 22:08 |
Интересные темы
парсинг google
Какие программы существуют для парсинга google, как называются и где скачать.
парсер google
Подробная статья про парсер google, как его написать и как им пользоваться, здесь.
парсер выдачи яндекса
Все про парсинг, парсер выдачи яндекса, где скачать или как сделать, читаем здесь.




